Получение данных со страницы с Ajax подгрузкой

[Alex1233]

Здравствуйте!

Подскажите пожалуйста, каким образом можно реализовать парсинг данных (для обработки и анализа) со страницы с подгружаемыми по ajax данными?

Пример:
Вот страничка с которой необходимо получить данные (данные о подарках): http://dreamscity.combats.com/inf.pl?1320948652&all=1

Внизу есть кнопочка "Показать ещё", при нажатии на которую догружается следующая часть подарков.

Как сделать получение информации о всех подарках со стороннего сайта (для анализа, подсчета и обработки) на автомате, при помощи скрипта? (в приоритете решение на PHP, JS, Jquery) Возможно ли такое вообще?

[ksa]

Как сделать получение информации о всех подарках со стороннего сайта на автомате, при помощи скрипта?

У того скрипта должен быть "доступ" к тем данным. Т.е. сервер должен отвечать на запросы, а не выдавать ошибку в доступе.
Так же нужно знать алгоритм этих запросов...

[Alex1233]

У того скрипта должен быть "доступ" к тем данным. Т.е. сервер должен отвечать на запросы, а не выдавать ошибку в доступе.
Так же нужно знать алгоритм этих запросов...

А без знаний деталей, просто взять и написать автоматический парсер под такое не получится?

В ручную же можно зайти и посмотреть (открыть/дозагрузить) все подарки, неужели скриптом это не реализовать никак? Чтобы например открывалась страница, жмакалась кнопочка эта с определенным интервалом и каждый раз проверкой на ее наличие (чтобы знать когда остановиться), а потом просто взять и спарсить всю страницу целиком?

[laimas]

А без знаний деталей, просто взять и написать автоматический парсер под такое не получится?

Вы можете достать из черного ящика требуемое если вам не скажут что именно?

[ksa]

В ручную же можно зайти и посмотреть (открыть/дозагрузить) все подарки, неужели скриптом это не реализовать никак?

При работе "В ручную" работает скрипт авторов, они-то как раз знают все детали построения данных и алгоритмов.
И доступ у них для себя налажен...

А ты без этого знания слеп и глух.

[Alex1233]

Так а скрипт авторов я не могу удаленно запускать скриптом никак? Вернее получать результат его работы?

Тем же .on('click') на Jquery. Просто необходимо реализовать какой то буфер чтоли для страницы, чтобы парсить с нее данные не сразу после загрузки, а только после определенных манипуляций с ней.

Неужели такие простые действия нельзя автоматизировать скриптом? O_o Вручную я же без проблем открываю эту страницу, и без всяких знаний и прочего дозагружаю все без проблем.

[Alex1233]

При работе "В ручную" работает скрипт авторов, они-то как раз знают все детали построения данных и алгоритмов.
И доступ у них для себя налажен...

А ты без этого знания слеп и глух.

Так у меня же есть открытая и доступная кнопка которая запускает этот авторский скрипт. По сути, зачем мне знать как оно работает у них там на сервере? Мне главное итоговый результат получить ведь. И вручную он (нужный результат) без проблем получается путем нехитрых манипуляций. Не пойму только как это автоматизировать можно.

Просто нужно чтобы не я сам заходил и жмакал эту кнопку, а за меня это делал мой сервер (скрипт/парсер).

[ksa]

Просто нужно чтобы не я сам заходил и жмакал эту кнопку, а за меня это делал мой сервер (скрипт/парсер).

Начнем с того, что на странице работает клиентский скрипт...

Как ты будешь внедрять свой скрипт на чужую страницу? У тебя есть доступ к исходникам того сайта?

[Alex1233]

Клиентский - это в смысле JavaScript?

Для чего мне внедрять к ним какой то скрипт? Есть же функция в PHP file_get_contents, которая может получать исходный код удаленной страницы. осталось только найти решение, каким образом перед получением этого самого кода страницы - будет прокликиваться (вызываться функция дозагрузки) эта кнопка с дозагрузкой (которая доступна всем и всегда при открытии данной страницы).

Неужели это такая сложная и нереализуемая задача?

[Alex1233]

Вот что нашел по теме (вроде), но не понимаю как это применить в моем случае: https://ru.stackoverflow.com/questio...�ерез-ajax

И как то уж больно сложно там. Неужели полегче нет решения?